🚀 Представлен Apache Spark 4.0 — крупнейший релиз с момента запуска Spark 2.0
Databricks анонсировали Spark 4.0 с множеством фундаментальных улучшений производительности и архитектуры.
Новый релиз фокусируется на ускорении обработки, поддержке GenAI-нагрузок и расширенной масштабируемости. 🔥 Что нового:
• 💡Project Tungsten++, Catalyst++ — переработка движка исполнения и оптимизации запросов • 🧠Поддержка генеративных AI-запросов — Spark теперь эффективнее работает с LLM-нагрузками • ⚙️Новый Execution Engine — более 2× ускорение в среднем, до 10× в некоторых кейсах • 📦Модульная архитектура — теперь ядро Spark отделено от MLlib, GraphX и др. • 🌐Поддержка нового Shuffle-движка и улучшенное распределение по кластерам • 🧪Обратная несовместимость — Spark 4.0 требует миграции, особенно для UDF и кастомных оптимизаций
🚀 Представлен Apache Spark 4.0 — крупнейший релиз с момента запуска Spark 2.0
Databricks анонсировали Spark 4.0 с множеством фундаментальных улучшений производительности и архитектуры.
Новый релиз фокусируется на ускорении обработки, поддержке GenAI-нагрузок и расширенной масштабируемости. 🔥 Что нового:
• 💡Project Tungsten++, Catalyst++ — переработка движка исполнения и оптимизации запросов • 🧠Поддержка генеративных AI-запросов — Spark теперь эффективнее работает с LLM-нагрузками • ⚙️Новый Execution Engine — более 2× ускорение в среднем, до 10× в некоторых кейсах • 📦Модульная архитектура — теперь ядро Spark отделено от MLlib, GraphX и др. • 🌐Поддержка нового Shuffle-движка и улучшенное распределение по кластерам • 🧪Обратная несовместимость — Spark 4.0 требует миграции, особенно для UDF и кастомных оптимизаций
“To the extent it is used I fear it’s often for illicit finance. It’s an extremely inefficient way of conducting transactions, and the amount of energy that’s consumed in processing those transactions is staggering,” the former Fed chairwoman said. Yellen’s comments have been cited as a reason for bitcoin’s recent losses. However, Yellen’s assessment of bitcoin as a inefficient medium of exchange is an important point and one that has already been raised in the past by bitcoin bulls. Using a volatile asset in exchange for goods and services makes little sense if the asset can tumble 10% in a day, or surge 80% over the course of a two months as bitcoin has done in 2021, critics argue. To put a finer point on it, over the past 12 months bitcoin has registered 8 corrections, defined as a decline from a recent peak of at least 10% but not more than 20%, and two bear markets, which are defined as falls of 20% or more, according to Dow Jones Market Data.
However, analysts are positive on the stock now. “We have seen a huge downside movement in the stock due to the central electricity regulatory commission’s (CERC) order that seems to be negative from 2014-15 onwards but we cannot take a linear negative view on the stock and further downside movement on the stock is unlikely. Currently stock is underpriced. Investors can bet on it for a longer horizon," said Vivek Gupta, director research at CapitalVia Global Research.
